Lee là con trai của Jonathan Lee và Emily Riordan Lee, nhũ danh là Murphy, người xuất bản các chương trình truyền hình di cư đến Nam Phi năm 1996. Họ đã li dị. Chị gái của Lee, Theodora Lee, thường xuất hiện trong video của anh và cũng có kênh Youtube riêng của mình.

Mẹ của Lee là con gái của thi sĩ người Anh-Ireland Richard Murphy và nhà văn người Nam Phi Pasty Strang, nhũ danh là Avis, kết hôn sớm với Hon. Colin Strang, là giáo sư Đại học, trong thời gian bà cộng tác với Philip Larkin. Murphy và Patsy Strang kết hôn năm 1955 và li dị vào năm 1959.

Thông qua Richard Murphy, Lee đã liên lạc với dòng dõi quý tộc ở Anh và các gia đình quyền quý. Cha của Murphy là Sir William Lindsay Murphy, là người cuối cùng không có nguồn gốc thị trưởng ở Colombo, cuối cùng đã trở thành thống đốc ở Bahamas. Những người anh chị em họ đầu tiên của mẹ của Lee bao gồm Anothy Murphy,[19] đã dẫn tuổi trẻ mình trong series Tom Brown's Schooldays (miniseries năm 1971) và cuối cùng là người chồng đầu tiên của Lady Sophia Canvendish, con gái thứ Mười Một của Devonshire; Robert Murphy, con rễ thứ Hai Mươi của Baron Teynham, và nhà làm phim Fiona Murphy, vợ của học thuật Anatole Kaletsky. Mary Murphy, dì của mẹ của Lee, là vợ của Brigadier Toby Caulfield, và họ là cha mẹ của Grania, đã kết hôn với Hugh Cavendish, Baron Cavendish of Furness. Bà ngoại của Sir William Murphy, Isabella Fowler, có thể là người tạo ra tập đoàn bất hợp pháp giữa dòng dõi quý tộc của Earls of Barcarres và John Hely-Hutchinson, 3rd Earl of Barcarres. Dì của Sir William là nhà mô phạm Isabella Mulvany.

Thông qua ba ngoai của ông, Patsy Strang, Lee là cháu chắt trai của Meiert Cornellius Avis, là doanh nhân người Nam Phi gốc Hà Lan. Cháu trai của Strang, người ở cùng với bà và mẹ của Lee sau cái chết của ba mẹ anh, là đạo diễn người Los Angeles Meiert Avis.